5ce92e8ddc92da02aed1730e9e0c5014ce52039c
base2.1
- challenge
- Punctuation prediction from conversational language
- submitter
- Oskar Bujacz
- submitted
- 2022-12-19 19:52:25.204889 UTC
- file basename
- out
dev-0 / c19cfb063792f8b9ab0a7ff2200e758140d94617
| Metric | Score |
|---|---|
| Weighted-F1 | 65.78 |
| Hyphens-F1 | 72.73 |
| Comma-F1 | 61.46 |
| Ellipsis-F1 | 0.00 |
| Fullstop-F1 | 84.74 |
| QMark-F1 | 74.56 |
| Colon-F1 | 100.00 |
| Excl-F1 | 33.33 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-A QMark-F1 |
|---|---|---|---|---|
| 1 | audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Mhm:128910-128970 | B-QMARK | O | 0.00 |
| 2 | audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Mhm:202080-202110 | B-QMARK | O | 0.00 |
| 3 | audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 ta:110250-110310 ta:110610-110670 ta:110820-110850 ta:110970-111000 kwota:111030-1… | O O O O O O O B-QMARK | O O O O O O O O | 0.00 |
| 4 | audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 żebyście:168270-168600 państwo:168660-168900 znowu:168960-169170 włączyli:169260-1… | O O O B-QMARK O O O O O O O O O O O O | O O O O O O O O O B-QMARK O O O O O O | 0.00 |
| 5 | audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Muszę:197700-197850 tylko:197910-198120 mam:198210-198300 tylko:198360-198510 możl… | O O O O O O O O O O O O O O O O B-QMARK | O O O O O O O O O O O O O O O O O | 0.00 |
| 6 | audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 I:203310-203310 po:203520-203550 prostu:203610-203790 wpłacić:203910-204270 to:204… | O O O O O O O O O O O O O O B-QMARK | O O O O O B-QMARK O O O O O O O O O | 0.00 |
| 7 | audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 w:219930-219930 tej:219990-220080 ciemności:220110-220620 dopóki:220680-220950 nie… | O O O O O B-QMARK O O O | O O O O O O O O O | 0.00 |
| 8 | audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Dzień:7020-7140 dobry:7200-7440 Energetyka:7800-8280 SA:8610-8610 Karolina:8760-90… | O O O O O O O O O B-QMARK | O O O O O O O O B-QMARK | 0.00 |
| 9 | audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Tak:53790-53910 To:54000-54030 poproszę:54120-54480 | B-QMARK O O | O O O | 0.00 |
| 10 | audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 faktury:156510-156810 była:156930-157110 na:157200-157230 dwieście:157500-157860 d… | O O O O O O B-QMARK | O O O O O O O | 0.00 |
| 11 | audio/cbiz_tc_41.wav 3896bb9d-e80e-458e-9695-4f7427c1abdf Ale:80640-80760 wysłali:80940-81210 mi:81270-81300 ją:81360-81390 państwo:81480-81… | O O O O O O O O O O O O O B-QMARK | O O O O O O O O O O O O O O | 0.00 |
| 12 | audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 Z:116130-116130 miesiąca:116220-116580 na:116670-116730 miesiąc:116790-117180 nie:… | O O O O B-QMARK | O O O O O | 0.00 |
| 13 | audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 I:148740-148740 może:148800-148950 może:149040-149160 może:149430-149550 się:14961… | O O O O O O O O B-QMARK | O O O O O O O O O | 0.00 |
| 14 | audio/cbiz_tc_56.wav 1b68cc28-468b-45e7-8d07-41101491b69e A:18570-18570 czy:18660-18720 jest:24600-24720 pani:24750-24900 właścicielem:36480… | O O O O O O O B-QMARK | O O O O O O B-QMARK O | 0.00 |
| 15 | audio/cbiz_tc_56.wav 1b68cc28-468b-45e7-8d07-41101491b69e Domagala:151770-151770 tak:153930-154080 Kropka:154200-154590 | O B-QMARK O | O O O | 0.00 |
| 16 | audio/cbiz_tc_56.wav b1ac6642-6e1d-4b46-83b2-710dc8ad743e Czyli:90480-90600 muszę:100500-100800 jakby:100890-101190 zalogować:101250-101550 … | O O O O O B-QMARK | O O O O O O | 0.00 |
| 17 | audio/cbiz_tc_56.wav b1ac6642-6e1d-4b46-83b2-710dc8ad743e jakiegokolwiek:132690-134940 innego:134970-135900 | O B-QMARK | O O | 0.00 |
| 18 | audio/cbiz_tc_64.wav ed4ff12e-a462-4c82-a004-38ab9fe618bf Joanna:15030-20400 Kwiatkowska:20430-20790 Twoja:20820-20940 Energia:20970-21240 p… | O O O O B-QMARK | O O O O O | 0.00 |
| 19 | audio/cbiz_tc_64.wav ed4ff12e-a462-4c82-a004-38ab9fe618bf Pani:167190-167370 twierdzi:167460-167670 że:167700-167730 o:167760-167760 ile:167… | O O O O O O O O O B-QMARK | O O O O O O O O O O | 0.00 |
| 20 | audio/cbiz_tc_64.wav 9e40dee7-153b-421b-ae6e-f5504115b826 Hasło:77430-77850 | B-QMARK | O | 0.00 |
| 21 | audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Dziękuję:44370-44700 pani:44760-44910 bardzo:44970-45300 I:45420-45510 adres:45600… | O O O O O O O O O O O O B-QMARK O B-QMARK | O O O O O O O O B-QMARK O O O B-QMARK O O | 50.00 |
| 22 | audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 czwartego:74130-74610 maja:74760-75030 i:75750-75750 pani:75900-76110 mówi:76350-7… | O O O O O O O O O O B-QMARK O O O B-QMARK | O O O O O O O O O B-QMARK B-QMARK O O O O | 50.00 |
| 23 | audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Wszystko:354000-354600 rozumiem:430170-430380 Z:430410-430770 mojej:431280-431280… | O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-QMARK | O O O O O O O O O O O O O O O O O B-QMARK O O O O O O O O O O O O O O B-QMARK | 66.67 |
| 24 | audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Cztery:94770-95010 Ale:95100-95190 dlaczego:95250-95520 aż:95580-95610 tak:95700-9… | O O O O O B-QMARK O O O O O O O O O O O O O O O B-QMARK | B-QMARK O O O O B-QMARK O O O O O O O O O B-QMARK O O O O O B-QMARK | 66.67 |
| 25 | audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 I:58200-58200 to:58320-58350 pani:58440-58620 jest:58650-58740 właścicielem:58770-… | O O O O O O B-QMARK | O O O O O B-QMARK B-QMARK | 66.67 |
| 26 | audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Tylko:135840-136020 proszę:136110-136260 powiedzieć:136350-136680 Rozumiem:136830-… | O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-QMARK | O O O O O O O O O O O B-QMARK O O O O O O O O O O O O O O O O O O B-QMARK | 66.67 |
| 27 | audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 z:162330-162330 tą:162420-162510 fakturą:162570-163020 Gdyby:163140-163410 tak:163… | O O O O O O O O O O O O O O B-QMARK O O O O O O O O O O O O O O O O O | O O B-QMARK O O O O O O O O O O O B-QMARK O O O O O O O O O O O O O O O O O | 66.67 |
| 28 | audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Czy:275340-275370 na:275400-275520 ten:275580-275640 moment:275730-275970 jeszcze:… | O O O O O O O O O O O B-QMARK O O O B-QMARK | O O O O O O O O O O O B-QMARK O O O O | 66.67 |
| 29 | audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 No:68400-68460 nie:68850-68880 Nie:69180-69210 dostałam:69270-69870 no:69990-70020… | O O O O O O O O O O O O B-QMARK O O O O O O | O O O O O O O O O O O O B-QMARK O O B-QMARK O O O | 66.67 |
| 30 | audio/cbiz_tc_24.wav e2a8a04f-2a58-4361-8d2b-c92bb50a7081 No:122910-122940 ale:123000-123090 to:123210-123270 najpierw:123330-123630 jeżeli:… | O O O O O O O O O O O O O O O B-QMARK O O O O O O O O O | O O O O O O O O O O O O O O B-QMARK B-QMARK O O O O O O O O O | 66.67 |
| 31 | audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 I:50640-50640 to:50700-50730 mąż:50760-50910 jest:50970-51060 właścicielem:51090-5… | O O O O O O O B-QMARK | O O O O O O B-QMARK B-QMARK | 66.67 |
| 32 | audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 W:62910-62910 takim:63060-63270 razie:63360-63570 ja:63870-63930 już:64020-64110 t… | O O O O O O O O O O O O O O O O O O O B-QMARK | O O O O O O O O O O O O O O O O O O B-QMARK B-QMARK | 66.67 |
| 33 | audio/cbiz_tc_24.wav c431c029-b346-4475-a95a-41139fdfac47 Małpa:143820-144120 energia:144240-144630 kropka:144690-144990 pl:145110-145110 Mo… | O O O O O O O O B-QMARK | O O O O O O O B-QMARK B-QMARK | 66.67 |
| 34 | audio/cbiz_tc_64.wav ed4ff12e-a462-4c82-a004-38ab9fe618bf Czy:200850-200880 w:200910-200910 takim:200940-201060 razie:201090-201360 m:201870… | O O O O O O O O O O O O O O B-QMARK | O O O O O O O O O O B-QMARK O O O B-QMARK | 66.67 |
| 35 | audio/cbiz_tc_64.wav 9e40dee7-153b-421b-ae6e-f5504115b826 To:77970-78030 jest:78330-78630 takie:91020-91410 cyfrowe:91650-92790 tak:92910-93… | O O O O B-QMARK O O B-QMARK | O O O O B-QMARK O O O | 66.67 |
| 36 | audio/cbiz_tc_64.wav 9e40dee7-153b-421b-ae6e-f5504115b826 Za:125580-125610 to:127920-128010 że:128220-128280 ja:128370-128430 dzwonię:128730… | O O O O O O O O O O O O B-QMARK | O O O O O O O O O O O B-QMARK B-QMARK | 66.67 |
| 37 | audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Kłaniam:10320-10560 się:10680-10710 Dzień:10770-10860 dobry:10920-11100 Rafał:112… | O O O O O O O O O O O O O O O O O O O | O O O O O O O O O O O O O O O O O O O | 100.00 |
| 38 | audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Czterdzieści:31920-32370 siedem:32430-32670 | O O | O O | 100.00 |
| 39 | audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Mhm:50580-50610 | O | O | 100.00 |
| 40 | audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Tak:52620-52710 | O | O | 100.00 |